Khi Quan Vũ từ biệt Tào Tháo để tìm về với Lưu Bị có đi ngang qua nhà của Hồ Hoa và ở lại, Hồ Hoa có viết một bức thư nhờ Quan Vũ gửi cho Hồ Ban. Khi Quan Vũ đến địa điểm thuộc quyền quản lý của Vương Trực, Vương Trực muốn hại Quan Vũ liền dã vờ niểm nỡ đón tiếp nhưng ngầm sai Hồ Ban cùng binh lính chất củi lửa ở buồng Quan Vũ đang ở để đốt chết.

Hồ Ban tối hôm đó đi một vòng để kiểm tra, đôn đốc công tác tiêu diệt Quan Vũ. Khi đi ngang qua phòng Quan Vũ, Hồ Ban vốn nghe tiếng Quan Vũ từ lâu muốn coi cho biết mặt liền khẽ lén nhìn trộm vào buồng Quan Vũ và thấy ông này đang chong đèn đọc sách. Thấy thần thái uy nghi, Hồ Ban buộc miệng khen là "thật là người trời", và bị Quan Vũ phát hiện và mời vào trò chuyện, Hồ Ban qua trò chuyện rất khâm phục Quan Vũ, và sau khi bíết Hồ Ban là con của Hồ Hoa, Quan Vũ chuyển thư cho Hồ Ban xem. Khâm phục và cảm tạ tấm lòng của Quan Vũ, Hồ Ban quyết định tiết lộ âm mưu của Vương Trực và bố trí cho Quan Vũ thoát hiểm, còn mình thì châm lửa đốt nhà theo kế hoạch đã đề ra.